LATERN: Test-Time Context-Aware Explainable Video Anomaly Detection
LATERN:测试时上下文感知可解释视频异常检测
🧭 视频异常检测 · 上下文感知VLM
University of Iowa
通过上下文感知评分与递归证据聚合,使冻结VLM在测试时能生成连贯的事件级异常解释。
📌 工作参考价值(4 点)
- 图像扎根的记忆机制:根据帧多样性和视觉-文本对齐选择性保留历史帧作为上下文,可借鉴到多模态推荐中的时序行为建模,动态保留关键交互帧以增强长期兴趣理解。
- 递归证据聚合:分层聚合片段分数形成事件级决策,类似于 Agent 的多轮推理或层次化决策,可用于电商直播中的违规行为检测,从连续帧中逐步确认违规事件。
- 冻结 VLM 的测试时增强:不微调模型,仅通过外部记忆和聚合提升性能,适用于难以快速微调的大模型,可在商品描述异常检测或虚假评论识别中叠加类似轻量上下文模块。
- 解释一致性优化:显式要求事件级解释需跨段时间一致,对电商客服 Agent 的多轮对话摘要或推荐理由生成有参考价值,避免片段式、前后矛盾的输出。